Metric	Score
Weighted-F1	60.18
Hyphens-F1	100.00
Comma-F1	62.49
Ellipsis-F1	0.00
Fullstop-F1	85.78
QMark-F1	74.30
Colon-F1	100.00
Excl-F1	28.57

Metric	Score
Weighted-F1	71.74
Hyphens-F1	72.73
Comma-F1	68.33
Ellipsis-F1	0.00
Fullstop-F1	90.47
QMark-F1	83.54
Colon-F1	100.00
Excl-F1	33.33

worst items

note: the gold standard is taken from the challenge

#	input	expected output	actual output	test-A Ellipsis-F1
1	audio/cbiz_tc_557.wav 10599a11-3bff-4ab0-836d-f9ed7a7cd8aa Wie:119580-119670 pan:119700-119760 co:119790-119880	O O B-ELLIPSIS	O O O	0.00
2	audio/cbiz_tc_557.wav 10599a11-3bff-4ab0-836d-f9ed7a7cd8aa Proszę:196770-196920 pana:196980-197100 a:197130-197130 co:197280-197340 powinien…	O O O O O O B-ELLIPSIS	O O O O O O O	0.00
3	audio/cbiz_tc_557.wav af63e562-a918-42cd-a6b7-3f7f7c0111fb Tak:52320-52410 więc:52440-52560 poproszę:52770-53460	O O B-ELLIPSIS	O O O	0.00
4	audio/cbiz_tc_557.wav af63e562-a918-42cd-a6b7-3f7f7c0111fb Dziękuję:70560-70950 bardzo:71040-71340 Już:71430-71520 sobie:71610-71760 wprowad…	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O B-ELLIPSIS O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O…	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O …	0.00
5	audio/cbiz_tc_557.wav af63e562-a918-42cd-a6b7-3f7f7c0111fb Na:129600-129660 ten:129720-129810 moment:129870-130140 te:130260-130290 terminy:…	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O …	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O …	0.00
6	audio/cbiz_tc_557.wav af63e562-a918-42cd-a6b7-3f7f7c0111fb Czy:196950-196980 ma:197040-197070 pan:197130-197220 jakieś:197280-197490	O O O B-ELLIPSIS	O O O O	0.00
7	audio/cbiz_tc_557.wav af63e562-a918-42cd-a6b7-3f7f7c0111fb Dziękuję:304440-304740 bardzo:304770-305070 Dobrze:305730-305910 To:305970-306000…	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O …	O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O O …	0.00
8	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Numer:33990-34200 klienta:34320-34710 to:34800-34890 dwa:34980-35160 dwa:35220-354…	O O O O B-ELLIPSIS	O O O O O	0.00
9	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Tak:62490-62880 No:62970-63000 ja:63150-63180 systematycznie:63270-63870 spłacam:6…	O O O O O O O O O O O O O O O O O B-ELLIPSIS	O O O O O O O O O O O O O O O O O O	0.00
10	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Nie:84420-84450 no:84540-84570 nie:84840-84870 Na:85020-85050 jaką:85110-85290 kwo…	O O B-ELLIPSIS O O O O O O O	O O O O O O O O O O	0.00
11	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Cztery:94770-95010 Ale:95100-95190 dlaczego:95250-95520 aż:95580-95610 tak:95700-9…	B-ELLIPSIS O O O O O O O O O O O O O O O O O O O O O	O O O O O O O O O O O O O O O O O O O O O O	0.00
12	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 To:102510-102570 Ale:102720-102840 no:102900-102960 nie:103050-103080 wiem:103110-…	B-ELLIPSIS O O O O O O B-ELLIPSIS B-ELLIPSIS O O O O O O O O O	O O O O O O O O O O O O O O O O O O	0.00
13	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 To:107670-107700 co:107880-107940 to:108000-108030 są:108120-108360 Z:108510-10851…	O O O B-ELLIPSIS O O O O B-ELLIPSIS	O O O O O O O O O	0.00
14	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 O:131820-131820 Boże:134790-135090 No:135510-135570 ale:135600-135690 To:135780-13…	O O O B-ELLIPSIS O O O B-ELLIPSIS O O O O O O O O O O O O O O O O O O O	O O O O O O O O O O O O O O O O O O O O O O O O O O O	0.00
15	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 No:144030-144060 ja:145440-145470	O B-ELLIPSIS	O O	0.00
16	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Jakie:145620-145800 odsetki:145860-146280 Przecież:146340-146610 ja:146670-146700 …	O O O O O O O O O O B-ELLIPSIS O O O O O O B-ELLIPSIS	O O O O O O O O O O O O O O O O O O	0.00
17	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 No:166200-166230 dobrze:166290-166440 to:166530-166590 co:166680-166740 ja:166770-…	O O O O O O O B-ELLIPSIS	O O O O O O O O	0.00
18	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 żebyście:168270-168600 państwo:168660-168900 znowu:168960-169170 włączyli:169260-1…	O O O O O O O O O O O O O O O B-ELLIPSIS	O O O O O O O O O O O O O O O O	0.00
19	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Czyli:174750-174870 dostanę:174900-175290 ją:175410-175590 Zaraz:175680-175860 pan…	O O B-ELLIPSIS O O O	O O O O O O	0.00
20	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 W:176610-176610 ponie:177510-177510 we:177780-178050 wtorek:178200-178500 przyszły…	O B-ELLIPSIS O O O O O O O O O O O	O O O O O O O O O O O O O	0.00
21	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 Muszę:197700-197850 tylko:197910-198120 mam:198210-198300 tylko:198360-198510 możl…	O B-ELLIPSIS O O B-ELLIPSIS O O O O O O O O O O O O	O O O O O O O O O O O O O O O O O	0.00
22	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 I:203310-203310 po:203520-203550 prostu:203610-203790 wpłacić:203910-204270 to:204…	O O O O O B-ELLIPSIS O O O O O O O O O	O O O O O O O O O O O O O O O	0.00
23	audio/cbiz_tc_26.wav 597f8543-06b5-4d46-b85c-cd8f43df2264 O:216540-216540 Boże:216660-216900 Czyli:217350-217470	O O B-ELLIPSIS	O O O	0.00
24	audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 To:19830-19860 dobrze:20700-20940 już:21060-21150 poproszę:21300-21720	O O O B-ELLIPSIS	O O O O	0.00
25	audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 Ta:72960-73020	B-ELLIPSIS	O	0.00
26	audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 to:115170-115230	B-ELLIPSIS	O	0.00
27	audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 Termin:122520-122820 płatności:122970-123660 minął:123810-124290	O O B-ELLIPSIS	O O O	0.00
28	audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 Wie:125970-126030 pani:126120-126240 co:126330-126360 Chwileczkę:126420-126780 Nie…	O O O B-ELLIPSIS O O O O O O O O O O O O O O O O O	O O O O O O O O O O O O O O O O O O O O O	0.00
29	audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 To:141600-141630 ze:141750-141810 względu:141870-142140 na:142200-142260 notę:1423…	O O O O O O O O O O B-ELLIPSIS	O O O O O O O O O O O	0.00
30	audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 Wartość:155340-155640 samej:155670-155940	O B-ELLIPSIS	O O	0.00
31	audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 No:203430-203490	B-ELLIPSIS	O	0.00
32	audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 I:207930-207930 ja:207960-208110 rozumiem:208230-208590 natomiast:208680-209100 be…	O O O O O O O O B-ELLIPSIS O O O O O O O O B-ELLIPSIS	O O O O O O O O O O O O O O O O O O	0.00
33	audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 No:221580-221610 ja:221700-221760 nie:221850-221880 jestem:221970-222240 w:222330-…	O O O O O O O O O O O O O O O O O B-ELLIPSIS	O O O O O O O O O O O O O O O O O O	0.00
34	audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 Tak:235050-235230 tak:235380-235500 Oczywiście:235590-236130 Niezwłocznie:236220-2…	O O O O B-ELLIPSIS O O O O O O O O O O O O O	O O O O O O O O O O O O O O O O O O	0.00
35	audio/cbiz_tc_26.wav a6c94040-593e-4280-8cbf-fb8fb1360e44 No:245340-245400 To:245910-245940 wtedy:246000-246240	O O B-ELLIPSIS	O O O	0.00
36	audio/cbiz_tc_41.wav 1f0220c3-4246-4648-bbe4-53fcc8fe5318 Mhm:20040-20040 dobrz:20280-20280	O B-ELLIPSIS	O O	0.00
37	audio/cbiz_tc_41.wav 1f0220c3-4246-4648-bbe4-53fcc8fe5318 Poprosiłabym:29460-30150 A:30630-30630 imię:30930-31080 nazwisko:31140-31530 pani:…	B-ELLIPSIS O O O O O O O O O O O O O O O O O O O O	O O O O O O O O O O O O O O O O O O O O O	0.00
38	audio/cbiz_tc_41.wav 1f0220c3-4246-4648-bbe4-53fcc8fe5318 Dziękuję:44370-44700 pani:44760-44910 bardzo:44970-45300 I:45420-45510 adres:45600…	O O O O O B-ELLIPSIS O O O O O O O O O	O O O O O O O O O O O O O O O	0.00
39	audio/cbiz_tc_41.wav 1f0220c3-4246-4648-bbe4-53fcc8fe5318 Więc:94440-94740 rozumiem:95370-95640 że:95730-95760 to:95850-95910 Skrzynkę:96390…	O O O B-ELLIPSIS O O O O O O O O O O O O O O	O O O O O O O O O O O O O O O O O O	0.00
40	audio/cbiz_tc_41.wav 1f0220c3-4246-4648-bbe4-53fcc8fe5318 Dobrze:116640-116940 Proszę:117030-117180 pani:117240-117390 to:117480-117510 ja:1…	O O O O B-ELLIPSIS O O O O O O O O O O O O O O O O O O O O O O	O O O O O O O O O O O O O O O O O O O O O O O O O O O	0.00